Towards Quantifying Benchmark Optimization in ASR Models
量化ASR模型中的基准优化行为
🧭 基准过拟合评估 · 行为探针
Hume AI Research
用三类行为探针发现高分开源ASR模型在音频欠定时仍输出基准参考文本，可通过低秩引导操控
📌 工作参考价值（4 点）
- 在搜索推荐场景中，公开评测集同样存在被离线指标过拟合的风险。可直接借鉴其三类探针思路：构造用户意图/行为欠定的样本（如历史稀疏、上下文矛盾、文本模糊），检查模型是否偏向输出头部商品、高频query或模板文案，而不是忠实于可用信号
- 用机制探针验证模型是否依赖窄特征（如位置、曝光次数、特定品牌词）来提升离线指标，若存在可通过低秩线性引导（类似activation steering）或对输入追加简单信号进行因果操纵，说明模型学到的是捷径而非可泛化能力
- 对LLM Agent或生成式推荐做上线前评估时，加入参考不一致、掩码关键信息、拼写/表述切换等对抗性探针，量化模型在信息不确定时是否“背答案”，可作为离线A/B前的诊断关卡
- 结论提醒：WER/AUC等指标提升可能来自对特定评测分布的条件化行为，而非真实能力提升。业务迭代中应定期注入分布外或反事实测试集，防止基准优化误导模型选型